Json2run: a Tool for Experiment Design & Analysis

3 Usage 4 3.1 Designing experiment files . . . . . . . . . . . . . . . . . . . . 4 3.1.1 Basic JSON syntax . . . . . . . . . . . . . . . . . . . . 4 3.1.2 Combinations and alternatives (inner nodes) . . . . . 5 3.1.3 Leaf nodes . . . . . . . . . . . . . . . . . . . . . . . . 7 3.1.4 Post-processors . . . . . . . . . . . . . . . . . . . . . . 10 3.2 The j2r command line tool . . . . . . . . . . . . . . . . . . . 14 3.2.1 Input . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 3.2.2 Available actions . . . . . . . . . . . . . . . . . . . . . 14 3.2.3 Batch options . . . . . . . . . . . . . . . . . . . . . . . 15 3.2.4 Running options . . . . . . . . . . . . . . . . . . . . . 15 3.2.5 Extra options for races . . . . . . . . . . . . . . . . . . 16 3.2.6 Database options . . . . . . . . . . . . . . . . . . . . . 16 3.2.7 Logging info . . . . . . . . . . . . . . . . . . . . . . . . 17 3.2.8 Source code versioning . . . . . . . . . . . . . . . . . . 17 3.2.9 Instances and configurations . . . . . . . . . . . . . . . 17 3.3 Running examples . . . . . . . . . . . . . . . . . . . . . . . . 17 3.3.1 Running a batch of experiments . . . . . . . . . . . . 17 3.3.2 Running a configuration race . . . . . . . . . . . . . . 17 3.3.3 Resuming a batch or a race . . . . . . . . . . . . . . . 18 3.3.4 Printing detailed data about a batch or race . . . . . . 18